KeyFrame-Compass: Towards Comprehensive Evaluation of Keyframe-Conditioned Video Generation
关键帧条件视频生成全面评估基准
🧭 关键帧视频生成评估基准
HKUST(GZ) · Kling Team · PKU · RUC · NWPU
首个系统性关键帧视频生成评估基准，分解六项执行度指标并揭示模型在忠实度与自然度间的权衡
📌 工作参考价值（4 点）
- 若涉及商品展示视频生成（如电商详情页短视频），可借鉴六维关键帧执行度指标（存在性、保真度、时序、定位、持久性、唯一性）构建自动化质量校验流水线。
- 自动化评估框架中“证据支撑的MLLM判断+专业感知模型”的组合，可用于离线评测生成视频对给定商品图片序列的还原程度，减少人工评审成本。
- 实验揭示的“关键帧密度增加导致性能退化”结论，提示在设置关键帧数量时需平衡约束与自然度，对产品化参数调优有参考价值。
- 开源模型无法正确解释故事板网格输入的时间顺序，提醒若采用此类输入格式需谨慎，或需设计前处理模块注入时序信息。